意念所至,万物皆应,这一幕看似来自科幻电影,宛如超能者的天赋,或是魔法世界的奇迹。在现实世界中,这种能力曾经遥不可及,但随着眼动追踪技术的突破,这一幻想终于迈向现实。
2016年前后,初代VR/AR眼镜和头显的问世,让用户得以进入沉浸式的3D虚拟环境,体验身临其境的感官刺激。然而,由于当时的技术局限,仍然只能依靠手柄、控制器或头部移动来操作虚拟世界,无法真正实现“以眼控物”。更令人遗憾的是,早期的设备易造成眩晕,交互方式也略显生硬,距离真正的自然沉浸式体验仍有较大差距。
图源@元时文化
如今,人们仅凭双眼便可精准操控虚拟空间,眼动仪能够实时捕捉眼球的移动轨迹,并将其转化为交互指令,它不仅让数字世界更加智能化,也让人与虚拟环境之间的连接更加紧密。无论是在VR游戏、虚拟会议,还是远程医疗、智慧办公等场景,眼动追踪都让交互变得更加直观和高效。
不仅如此,该技术还能通过追踪用户的凝视点,动态调整画面渲染,极大降低VR使用时的晕眩感,使虚拟体验更加顺畅自然。未来,或许我们真的可以仅凭眼神,便能在虚拟世界中自由穿梭,创造属于自己的数字奇迹。
图源@元时文化
在元宇宙的构建过程中,注意力计算是优化用户体验的重要手段之一。
眼动仪能够实时追踪用户的凝视点、眼动轨迹以及瞳孔变化,从而计算出用户的注意力分布情况。这种数据可以用于优化虚拟环境的设计,例如在VR游戏中,系统可以根据用户的凝视方向动态调整画面细节,降低不必要的计算负担,提高渲染效率。
此外,注意力计算还可以用于广告投放的优化,通过分析用户对不同广告元素的关注程度,实现精准营销。这不仅能够提高广告的投放效率,还能避免用户因无关信息而分散注意力,从而提升整体的沉浸体验。
图源@元某人
在元宇宙的人机交互方面,眼动仪的应用极大地提升了交互的自然性和便捷性。传统的交互方式依赖于手柄、触控板或语音指令,而眼动追踪技术则提供了一种更为直观的交互方式。例如,在VR环境中,用户可以通过凝视来选择菜单项,而无需使用手柄进行繁琐的操作。这种“凝视选取”(Gaze-based Selection)技术已经在多个VR设备中得到了应用。
此外,眼动仪还可以结合眨眼和瞳孔收缩等生理信号,实现更丰富的交互方式。例如,在虚拟社交平台中,用户可以通过眨眼发送表情,或通过瞳孔变化传递情绪信息,从而增强虚拟环境中的情感交流。
图源@元时文化
在应用方向上,眼动仪在多个元宇宙相关的领域展现出了巨大的潜力。
在教育培训方面,眼动追踪可以用于评估学生的注意力分布,从而优化教学内容。例如,在VR课堂中,系统可以实时监测学生对不同知识点的关注情况,并根据数据调整教学节奏,提高学习效率。
在职业培训中,眼动仪可以用于模拟训练,例如飞行员训练、医疗手术模拟等,通过分析学员的注意力焦点来评估他们的操作熟练度,并提供个性化的反馈。
图源@秦朔朋友圈
在医疗康复领域,眼动仪同样发挥着重要作用。例如,对于脑损伤或中风患者,眼动追踪技术可以用于评估患者的认知功能和视力恢复情况,并辅助康复训练。
对于患有自闭症或注意力缺陷多动障碍(ADHD)的儿童,眼动数据可以用于评估他们的注意力模式,并设计个性化的干预方案。
元宇宙的虚拟环境提供了一个安全且可控的训练空间,使这些患者能够在沉浸式环境中进行康复训练,进而提高康复效果。
图源@浦东发布
在娱乐和内容创作方面,眼动仪的应用进一步提升了用户体验。在VR电影和游戏中,眼动追踪技术可以用于“动态渲染”(Foveated Rendering),即系统仅对用户凝视区域进行高精度渲染,而对视野边缘区域进行低精度渲染,从而大幅降低计算成本,提高图像质量。
此外,在互动叙事中,眼动数据可以用于动态调整剧情发展。例如,在一款恐怖游戏中,系统可以根据玩家的眼动数据判断他们的恐惧程度,并动态调整游戏节奏和情节,以增强沉浸感和个性化体验。
图源@ChatGPT
从商业价值角度来看,眼动仪的应用不仅提高了元宇宙平台的用户粘性,还促进了精准营销和商业模式的创新。在虚拟购物中,眼动追踪可以用于分析消费者的关注点,并推荐最符合他们兴趣的商品。
在广告投放方面,品牌可以利用眼动数据优化广告内容和位置,提高广告的转化率。同时,眼动追踪还可以用于优化用户界面设计,提高用户体验,进而增强用户对元宇宙平台的依赖度。
Pupil Labs Neon眼动追踪系统消除了传统上与眼动追踪相关的障碍,无需设置,无需校准,戴上即采集,被试者采集条件不限(年龄、性别、有无眼妆、有无隐形眼镜等)。
NeonNet深度学习注释分类算法,即使在最苛刻的条件下,如白天黑夜、攀岩骑行等,也能提供前所未有的数据质量。
技术原理:
1、Neon有两个眼睛摄像头,每只眼睛一个,运行频率为200Hz。
2、摄像头的最佳位置靠近鼻子,以确保所有拍摄对象的眼睛的最大可见度并最大限度地减少遮挡。
3、您将始终可以访问所有原始数据、中间数据和最终数据,无需特殊许可证。
软件参数:
1、Neon Companion应用程序记录眼动追踪数据并实时监控实验。
2、Neon Companion应用程序提供注视数据、场景视频和眼睛视频的实时预览。轻松管理主题并使用模板添加元数据。立即直接在设备上播放录音并上传至Pupil Cloud。
3、Pupil Cloud中的高级注视映射和场景理解算法可安全存储和分析数据
4、通过本地WiFi将数据传输到任何网络浏览器,远程控制您的所有设备:开始和停止录音、添加事件注释等。
5、Pupil Cloud是基于网络的眼动追踪平台,用于数据物流、分析和可视化。利用云计算能力来帮助深入了解您的眼动追踪数据集。
6.录音可以自动上传到您的Pupil Cloud云帐户。
7、Pupil Cloud可以让您轻松地与协作者共享数据,同时保持完全的访问控制。存储符合GDPR要求并保护隐私。
8、Pupil Cloud提供了一系列工具,可以完全自动化传统上
劳动密集型任务,借助参考图像映射器,您可以简单地获取刺激的参考图像,并使用复杂的算法将视线完全自动映射到它,自动将视线映射到环境中的特征/物体上。
9、脸部映射器:检测场景视频中的面部并将注视数据映射到它们上。
10、标记映射器:使用April Tags定义曲面,将视线映射到这些表面上。
11、凝视叠加:自定义凝视、注视和场景视频的可视化。批量渲染视频部分以进行定性分析和可视化。
随着“可用眼代替手”的场景需求日益增多,眼动追踪技术还有更多可以大显身手的地方。相信,在Pupil Labs Neon眼动追踪系统的助力下,元宇宙的体验将更上一层楼。
未来这一技术将进一步推动虚拟世界的沉浸感、交互性和智能化水平的发展,为人类的数字化体验带来革命性的变革。在元宇宙的宏伟蓝图下,眼动仪无疑将成为连接虚拟与现实的重要桥梁,为未来的数字世界开辟更加广阔的可能性。
图源@元宇宙数字艺术